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Beschreibunq 
1. FACHGEBIET PER ERFIIMDUNG 

10 

Die Erfindung betrifft ein Verfahren zum Trainieren eines neuronalen Netzes 
^1^^^^ zur Ermittelung von Risikof unktionen fur Patienten im AnschluB an eine Erst- 
^^^V erkrankung mit einer vorbestimmten Krankheit auf Grundlage vorgegebener 
Trainings-Datensatze, welche objektivierbare und zu einem erheblichen Teil 
15 mel^technisch erfal3;te Daten zum Krankheitsbild der Patienten beinhalten, 
wobei das neuronale Netz eine Eingangsschlcht mit einer Mehrzahl von 
Eingangs-Neuronen und wenigstens eine Zwischenschicht mit einer Mehr- 
zahl von Zwischen-Neuronen umfaSt, sowie ferner eine Ausgangsschicht 
mit einer Mehrzahl von Ausgangs-Neuronen und eine Vielzahl von Synap- 
20 sen, die jeweils zwei Neuronen unterschiedlicher Schichten miteinander 
verbinden. 

^^i^^ 2, FACHLICHER HINTERGRUND ■ STAND DER TECHNIK 

25 

2.1. Allaemeines 

Auf zahlreichen Gebieten sind neuronale Netze zur Auswertung groBer 
Datenmengen zu den bislang ubiichen Auswerteverfahren erganzend hinzu- 
30 getreten oder haben diese ersetzt. Es hat sich namlich gezeigt, daR 
neuronale Netze besser als die herkommlichen Verfahren in der Lage sind, 
in den Datenmengen verborgene, nicht ohne weiteres erkennbare Abhangig- 
keiten zwischen den einzelnen Eingangsdaten aufzuspuren und aufzuzeigen. 
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Daher liefern neuronale Netze, welche anhand einer bekannten Datenmenge 
trainiert worden sind, fur neue Eingangsdaten des gleichen Datentyps 
zuverlassigere Aussagen als die bisherigen Auswerteverfahren. 

Im Bereich medizinischer Anwendungen ist es beispielsweise bekannt, 
neuronale Netze zur Bestimmung einer Uberlebensfunktion fur an einer 
bestimmten Krankheit, etwa Krebs, leidende Patienten einzusetzen. Diese 
Uberlebensfunktion gibt dabei in Abhang i gkeit der seit der Ersterkrankung 
vergangenen Zeit die Wahrscheinlichkeit an, daB bei einem betrachteten 
Patienten ein vorhestimmtes Ereignis eintrltt. Dieses vorbestimmte Ereignis 
muB dabei nicht notwendigerweise der Tod des Patienten sein, wie dies die 
Bezeichnung "Uberlebensfunktion" vermuten laBt, sondern kann ein belie- 
biges Ereignis sein, beispielsweise eine erneute Erkrankung an Krebs. 

Die Datensatze umfassen eine ganze Reihe von objektivierbaren Angaben, 
d.h. Daten, auf deren Wert eine das neuronale Netz gegebenenfalls 
bedienende Person keinen EinfluS hat und deren Wert gewiinschtenfalls 
automatisch erfaBt werden kann. Im Falle von Brustkrebs sind dies Angaben 
uber die Person des Patienten, beispielsweise Alter, Geschlecht und 
dergleichen, Angaben uber das Krankheitsbild, beispielsweise Anzahl der 
von Krebs befallenen Lymph-Knoten, tumor-biologische Faktoren, wie upA 
(Urokinase-Piasminogen-Aktivator), sein Inhibitor PAI-1 und dergleichen 
Faktoren, sowie Angaben iiber die Behandlungsmethode, beispielsweise Art, 
Dauer und Intensltat einer Chemo- oder Strahlen-Therapie. Unnotig zu 
erwahnen, daB eine ganze Reihe der vorstehend erwahnten Angaben, 
insbesondere der Angaben zum Krankheitsbild, nur unter Einsatz geeigneter 
MeSapparaturen ermittelt werden konnen. Dariiber hinaus konnen auch die 
personen-bezogenen Daten automatisiert von geeigneten Datentragern 
abgelesen werden, beispielsweise maschinenlesbaren Personalausweisen 
Oder dergleichen. Selbstverstandlich konnen die objektivierbaren Daten 
dann, wenn sie nicht alle gleichzeitig verfugbar sind, was insbesondere bei 
den Labor-MeSwerten haufig der Fall sein diirfte, auf einem geeigneten 



Speichermedium in einer Datenbank zwischengespeichert werden, bevor sie 
dem neuronalen Netz als Eingangsdaten zugefuhrt werden. 

2,2, Das neuronale Netz als Siqnalf liter 

GemaS vorstehendem kann man ein neuronales Netz also als eine Art 
'VSJ g n a W-i Ite r_!La u f.fa s s.e n , j^^^ 
nicht aussagekraftigen Eingangssignal ein aussagekraftiges Ausgangssignal 
herausfiltert. Ob bzw. wie gut das Filter seine Funktion erfullen kann, hangt 
wie bei jedem Filter davon ab, ob es gelingt, die Intensitat des Eigen- 
rauschens des Filters so niedrig zu halten, da&das herauszufilternde Signal 
nicht in dieserrTEigenrauschen untergeht. 

Die Intensitat des "Eigenrauschens" eines neuronalen Netzes ist umso 
niedriger, je mehr Datensatze einerseits zum Trainieren des neuronalen 
Netzes zur Verfiigung stehen und je einfacher andererseits die Struktur des 
neuronalen Netzes ist. Zudenn steigt die Generalisierungsfahigkeit des 
Netzes nnit zunehmender Vereinfachung der Struktur des neuronalen Netzes 
an. Bei einer im Stand der Technik ubiichen Vorgehenswelse befal^t sich 
daher ein Teil des Trainings neuronaler Netze mit dem Auffinden und 
Ellminieren von Strukturteilen, die fur den Erhalt eines aussagekraftigen 
Ausgangssignals entbehrlich sind. Bei diesem "Ausdunnen" (in der Fach- 
sprache auch als "pruning" bezeichnet) ist allerdings als weitere 
Randbedingung zu beachten, dalSdie Struktur des neuronalen Netzes nicht 
beliebig "ausgedunnt" werden darf, da mit abnehmender Komplexitat des 
neuronalen Netzes auch dessen Fahigkeit, kompiexe Zusammenhange nach- 
zubilden, und somit dessen Aussagekraft abnimmt. 
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2.3. Probleme beim medizinischen Einsatz 



Nun steht man in der Praxis, insbesondere be! dem eingangs angesproche- 
nen medizinischen Einsatz neuronaler Netze, haufig vor dem Problem, daB 
lediglich sehr Ideine Datenmengen von typischerweise wenigen hundert 
Datensatzen fiir das Training des neuronalen Netzes zur Verfugung stehen. 
Erschwerend kommt hinzu, dalS fiir das Training nicht nur eine Trainings- 
.D.ate.nroe,ng.e,_s,o,nde.rjx,teLa,e r aiich eine Validierungs-Datenmenge und eine 
Generalisierungs-Datenmenge vorgesehen werden mussen. Auf die Bedeu- 
tung dieser beiden Datenmengen wird weiter unten unter den Punkten 5.5. 
bzw. 5.7. noch naher eingegangen werden. 

Bei derart geringen Datenmengen fiihrte der Einsatz bekannter Pruning- 
IVlethoden aber stets zu einer so starken Vereinfachung der Struktur des 
neuronalen Netzes, daS die Aussagekraft des neuronalen Netzes auf ein 
nicht zu tolerierendes MaS absank. Um nach AbschluS der Trainungsphase 
aber dennoch neuronale Netze erhalten zu konnen, welche aussagekraftige 
Ausgangssignale liefern, wurden daher im Stand der Technik bei Vorliegen 
lediglich kleiner Trainingsdatenmengen neuronale Netze mit einer starren, 
d.h. fest vorgegebenen und unverandejiicJien_3jmMui^ Dabei 
wurde der Komplexitatsgrad bzw. die Einf achheit dieser starren Struktur auf 
Grundlage von Erfahrungswissen derart gewahlt. daS das neuronale Netz 
einerseits eine hohe Aussagekraft und andererseits ein gerade noch 
tolerierbares Eigenrauschen aufwies. BIslang wurde davon ausgegangen, 
daS die Vorgabe einer unveranderlichen Struktur unumganglich sei. 

Ein weiteres Problem der medizinischen Anwendungen neuronaler Netze ist 
darin zu sehen, daS zum Training nur "zensierte" Daten vorliegen. Mit dem 
Begriff "Zensur" wird dabei der Umstand umschrieben, daS fur Patienten, 
die zum Zeitpunkt der Datenerf assung gliicklicherweise noch keinen Ruckf all 
erlitten haben, die zukiinftige Entwicklung nicht vorauszusehen ist, und 
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Aussagen uber die Uberlebensfunktion daher nur bis zum Zeitpunkt der 
Erhebung der Daten mdglich sind. 



Es braucht nicht betont zu werden, daS gerade bei medizinischen 
5 Anwendungen auf ein wirklich aussagekraftiges Ergebnisses unter gar 
keinen Umstanden verzichtet warden darf. Es ist namlich in keinem Fall 
akzeptabel, wenn auch nur einenn Patient eine Behandlung nur deshalb 

vorenthalten wurde. weil das neuronale Netz diese nicht fur notwendig 

erachtet hat. Die Folgen fiir den Patienten konnten unabsehbar sein. 

^'^^^^ Hinsichtlich der Einzelheiten des vorstehend geschilderten Standes der 
^^1^ Technik sei auf die unter Punkt 6. "Literaturverzeichnis" aufgefuhrten 
Aufsatze verwiesen. 



15 



20 




25 



3. AUFGABE DER ERFINDUNG 



Demgegenuber ist es Aufgabe der Erfindung, ein automatisches Verfahren 
zum Trainieren eines neuronalen Netzes zur Ermittelung von Risiko- 
funktionen fiir Patienten im AnschluS an eine Ersterkrankung mit einer 
vorbestinnnnten Krankheit bereitzustellen, welches es trotz einer geringen 
Anzahl von zur Verfugung stehenden Trainingsdatensatzen eriaubt, ein 
neuronales Netz variabler Struktur einzusetzen und dessen Struktur in 
wenigstens einem Strukturvereinfachungs-Schritt zu optimieren. 



4. LOSUNG DER AUFGABE 



Diese Aufgabe wird erfindungsgemaB gelost durch ein Verfahren zum 
30 Trainieren eines neuronalen Netzes zur Ermittelung von Risikofunktionen fiir 
Patienten im AnschluS an eine Ersterkrankung mit einer vorbestimmten 
Krankheit auf Grundlage vorgegebener Trainings-Datensatze, welche 
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objektivierbare und meStechnisch erfaBte Daten zum Krankheitsbild der 
Patienten beinhalten, wobei das neuronale Netz umfaSt: 



eine Eingangsschicht mit einer Mehrzahl von Eingangs-Neuronen, 
wenigstens eine Zwischenschicht mit einer Mehrzahl von Zwischen- 
Neuronen, 

eine Ausgangsschicht mit einer Mehrzahl von Ausgangs-Neuronen, 
und 

eine Vielzahl von Sy napsen , die ieweils zwej N.eman.e.n_ 

unterschiedlicher Schichten miteinander verbinden, 
wobei das Training des neuronalen Netzes eine Strukturvereinfachungs- 
Prozedur umfaBt, d.h. das Auffinden und Eliminieren von Synapsen, welche 
auf den Verlauf der Risikofunktion keinen wesentlichen EinfluB ausuben, 
indem man entweder 

a1) zwei mit ein und demselben Empfangs-Neuron verbundene Sende- 
Neuronen auswahit, 

a2) unterstellt, daB die von diesen Sende-Neuronen zum Empfangs- 
Neuron ausgehenden Signale qualitativ im wesentlichen das gleiche 
Verhalten zeigen, also miteinander korreliert sind, 

a3) die Synapse eines der beiden Sende-Neuronen zu dem Empfangs- 
Neuron unterbricht und dafur das Gewicht der Synapse des jeweils 
anderen Sende-Neurons zu dem Empfangs-Neuron entsprechend 
anpaSt, 

a4) die Reaktion des gemafS Schritt a3) veranderten neuronalen Netzes 
mit der Reaktion des unveranderten neuronalen Netzes vergleicht, 
und 

a5) dann, wenn die Abweichung der Reaktion ein vorbestimmtes MaS 
nicht uberschreitet, entscheidet, die in Schritt a3) vorgenommene 
Anderung beizubehalten, 

Oder indem man 

bl) eine Synapse auswahit, 

b2) unterstellt, daS diese Synapse auf den Verlauf der Risikofunktion 
keinen wesentlichen EinfluB ausubt, 
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b3) diese Synapse unterbricht, 

b4) die Reaktion des gemaS Schritt b3) veranderten neuronalen Netzes 



mit der Reaktion des unveranderten neuronalen Netzes vergleicht, 
und 

5 b5) dann, wenn die Abweichung der Reaktion ein vorbestimmtes iVIafS 
nicht uberschreitet, entscheidet, die in Schritt b3) vorgenommene 
Anderung beizubehalten. 



Ein in der vorstehend beschriebenen Art und Weise trainiertes neuronales 
I 10 Netz unterstutzt den behandelnden Arzt beispiels weise bei der Entschei- 

• dung, welche Naclibehandlung er bei einem bestimmten frisch operierten 
Patienten einsetzen soil. Der Arzt kann hierzu dem neuronalen Netz die 
Patientendaten und die im Labor meRtechnisch erfaRten Daten uber das 
Krankheitsbild der Erstbehandlung eingeben und erhalt von dem neuronalen 
15 Netz eine Aussage darCiber, bei weicher Nachbehandlungsart sich die fur 
den gerade betrachteten Patienten gunstigste Uberlebensfunktion ergibt. 
Selbstverstandlich kann auch die Aggressivitat der einzelnen Nachbehand- 
lungsarten berucksichtigt werden, so daS bei gleich oder annahernd gleich 
gunstiger Uberlebensfunktion die fiir den Patienten schonendste Art der 
20 Nachbehandlung ausgewahit warden kann. 



5. AUSFUHRUNGSBEISPIEL 




25 Die Erfindung wird im folgenden an einem AusfCihrungsbeispiei naher 
eriautert werden. 



5.1. Aufbau neuronaler Netze 



Fig. 1 zeigt den Aufbau eines neuronalen Netzes, das nach Art eines 
Vielschicht-Perzeptrons aufgebaut ist. In diesem Fall umfaSt das neuronale 
Netz: 

eine EIngangsschicht mit einer Mehrzahl von Eingangs-Neuronen N, 
(i fur "input neuron"), 

weni a stens eine Zwischienschicht mit e iner Meiirzahl von Zwischen- 
Neuronen N,, (h fur "hidden neuron"), 

eine Ausgangsschicht mit einer Mehrzahl von Ausgangs-Neuronen No 
(o fur "output neuron"), und 

eine Vielzahl von Synapsen, die jeweils zwei Neuronen unterschied- 
licher Schichten miteinander verbinden. 

In der vereinfachten Ausfuhrungsform gemaB Fig. 1, die aus Anschaulich- 
keitsgrunden der nachfolgenden Diskussion zugrundegelegt werden soli, ist 
lediglich eine einzige Zwischenschicht vorgesehen, und sind die Neuronen 
(bzw. Knoten, wie sie haufig auch genannt werden) der Ausgangsschicht 
sowohl mit jedem Neuron der Eingangsschicht als auch mit jedem Neuron 
der Zwischenschicht iiber Synapsen (auch als "Konnektoren" bezeichnet) 
verbunden. 

Die Anzahl der Eingangs-Neuronen wird ubiicherweise in Abhangigkeit der 
Anzahl der zur Verfiigung stehenden objektivierbaren Angaben gewahlt. 
Sollte hierdurch jedoch die zur Ermittelung der Reaktion des neuronalen 
Netzes benotigte Zeit in einem nicht zu akzeptlerenden MalSe ansteigen, so 
kann beispielsweise mit Hilfe von neuronalen Netzen stark vereinfachter 
Struktur vorab eine Abschatzung der Bedeutung der einzelnen objektivier- 
baren Angaben auf die Aussagekraft des Gesamtsystems getroff en werden. 
Es sei jedoch betont, daB auch diese vorausgehende Abschatzung auto- 
matisch und ohne Eingriff der jeweiligen Bedienungsperson erfolgt. Ferner 
wird die Anzahl der Ausgangs-Neuronen so groS gewahlt, daS im Sinne 



einer Reihenentwickiung der Uberlebensfunktion eine ausreichende Anzahl 
von Reihenentwicklungs-Termen zur Verfugung steht, um eine aussage- 
kraftige Annaherung an die tatsachliche Uberlebensfunktion erzielen zu 
konnen. Die Anzahl der Zwischen-Neuronen schlieRlich wird einerseits so 
5 groS gewahit, daft die Ergebnisse des trainierten neuronalen Netzes 
aussagekraftig sind, und andererseits so klein, daB die zur Ermittelung des 
Ergebnisses benotigte Zeit akzeptabel ist. 



10 5.2- Funktion neuronaler Netze 



5.2,1 . Allqemeines 




Jedes Neuron empfangt ein Stimulationssignal S, verarbeitet dieses gemaR 
15 einer vorbestimmten Aktivierungsfunktion F(S) und gibt ein entsprechendes 
Antwortsignal A = F(S) aus, das alien unter diesem Neuron angeordneten 
Neuronen zugefuhrt wird. Das auf das betrachtete Neuron Ny einwirkende 
Stimulationssignal Sy wird ubiicherweise durch Aufsummieren der Antwort- 
signale A^ der uber diesem Neuron Ny angeordneten Neuronen N^ gebildet, 
20 wobei die Beitrage der einzelnen Neuronen N^ jeweiis mit einem Gewich- 

tungsfaktor w^y in die Summe eingehen, der die Starke der die beiden" 

Neuronen verbindenden Synapse angibt. 

Stimulationssignal: Sy = ^xy'^x 

25 

Antwortsignal: Ay = F(Sy) 



5.2,2, Einaanqsschicht 

30 

Die Stimulationssignale Sj der Eingangsneuronen Nj werden von den einen 
bestimmten Patienten j betreffenden Eingabedaten Xj j gebildet. 



Stimulationssignal: 
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Urn die Gewichte der Synapsen eines neuronalen Netzes in geeigneter 
Weise interpretieren zu konnen, ist es bevorzugt, mit Variablen zu arbeiten, 
deren Werte in der GroBenordnung von 1 liegen. Urn dies trotz der 
ubiicherwelse recht unterschiedlichen Verteilungen der Eingabedaten 
erreichen zu konnen, ist es ubiich, die Eingabedaten einer geeigneten 
Tror..=fnrm^tinn 7u unte r^i^^hen. Diese Transformation wird vo j3_deJL 



Aktivierungsfunktion F-, der Eingangsneuronen vorgenommen: 



Antwortsignal: 



Ai = tanh[(Si - Si.^i«e,)/Si,Ql 



Fiir die Eingabedaten x,,) wird also zum einen der iVIittelwert Si,„i«ei der der 
Trainingsdatenmenge angehorenden Patienten j gebildet. Und zum anderen 
wird ein Skalierungsfaktor S,,q gebildet. Liegt der Wert einer Eingabe- 
variablen x,, oberhalb des Mittelwerts S,,„i„e.» so erf olgt die Skalierung gemaS 
dem 75%-Quartil. Liegt er hlngegen unter dem Mittelwert, so erf olgt die 
Skalierung gemalS dem 25%-Quartil. Durch Einsatz der hyperbolischen 
Tangens-Funktion als Aktivierungsfunktion F, schlieBlich erhalt man in 
einfacher Weise normierte Antwortsignale, deren Werte im Bereich von -1 
bis + 1 liegen. 

Festzuhalten ist, daB man fur Eingangsdaten, die bereits die gewunschte 
Verteilung, kategorische oder binare Werte aufweisen, die vorstehende 
Transformation umgehen kann. 



5.2.3. Zwisnhenschicht 



Das Stimulationssignal Sh fur die Neuronen N, der Zwischenschicht wird von 
der gewichteten Summe der Antwortsignale A, aller Neuronen N, der 
Eingangsschicht gebildet: 



Stimulationssignal: 



Dieses Stimulationssignal wird von den Neuronen gemaS einer vorge- 
gebenen Aktivierungsfunktlon F^, die beispielsweise wiederum die hyper- 
5 bolische Tangens-Funktion sein kann, in ein Antwortsignal umgesetzt: 

Antwortsignal: A^ = F^fS^ - bj 



Die Parameter b^ werden auf dam Fachgebiet der neuronalen Netze als Bias 
10 Oder "Vorspannung" des betreffenden Neurons bezeichnet. Wie die Werte 

• der Synapseri-Gewichte w^y werden auch die Werte dieser Vorspannungs- 
parameter b^ im Zuge des Trainings des neuronalen Netzes ermittelt. 

15 5.2.4. Ausaangsschicht 

Die Ermittelung des Stimulationssignals und des Antwortsignals A^ fur ein 
Neuron N^ der Ausgangsschicht erfolgt in analoger Weise: 

20 Stimulationssignal: = \n,^'(A, - Cj) + "^ho'^h 




Antwortsignal: A^ = F^CSo - b^) 



Die Parameter bo geben wiederum die "Vorspannung" der Neuronen N^ der 
25 Ausgangsschicht an, wahrend die Parameter Cj der Anpassung der Stimula- 
tionsbeitrage der Neuronen N, der Eingangsschicht und N^ der Zwischen- 
schicht dienen. Die Werte sowohl der Parameter b^ als auch der Parameter 
Cj werden in der Trainingsphase des neuronalen Netzes ermittelt. Hinsicht- 
lich der Vorspannungen b^ kann es dabei vorteilhaft sein, als Randbedingung 
30 zu fordern, daB die uber die gesamte Trainingsdatenmenge gemittelte 
Antwort aller Ausgangsneuronen Nq Null ist. Als Aktivierungsfunktlon F^ 
kann fur die meisten Anwendungen, insbesondere den hier betrachteten Fall 
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der Ermittelung der Uberlebensfunktion fur Krebspatienten, die Identitats- 
funktion FJx) — x verwendet werden. 

Die Antwortsignale der Ausgangs-Neuronen geben den jeweiligen 
Koeffizienten des zugehorigen Terms der Reihenentwicklung der gesuchten 
Uberlebensfunktion an. 



5.3, Die Uberlebensfunktion 




15 



Wie vorstehend bereits angesprochen wurde, umfassen die Eingangsdaten 
Angaben uber die Person des Patienten, sowie Angaben uber das Krank- 
heitsbild. Alle diese Daten werden zu einem Zeitpunkt t = 0 erfafSt, im Falle 
von Krebspatienten beispielsweise denn Zeitpunkt der Erstoperation. Im 
AnschluS an die Erstoperation werden die Patienten dann einer bestimmten 
Nachbehandlung unterzogen, die beispielsweise Ghemo.- oder/undrStrahlenr 
Therapien beinhalten kann. 



20 




25 



Die Uberlebensfunktion S(t) gibt nun die Wahrscheinlichkeit an, da& bei 
einem betrachteten Patienten zum Zeitpunkt t ein bestimmtes Ereignis noch 
nicht eingetreten ist. Es kann sich bei diesem bestimmten Ereignis beispiels- 
weise um eine erneute Krebserkrankung, im schlimmsten Fall aber auch um 
den Tod des Patienten handeln. In jedem Fall gilt fCir die Uberlebensfunktion, 
daSS(O) = 1 . Dariiber hinaus wird ubiicherweise S(oo) = 1 angenommen. 

GemaS der ubiichen Notation kann man auf Grundlage der Uberlebens- 
funktion S(t) eine Ereignisdichte f(t) und eine Risikofunktion /i{t) definieren: 



f(t) = -dS/dt 



30 



A{X) = f(t)/S(t) 
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woraus folgt: 

Ait) = -(d/dt)[ln S(t)] 

Kennt man also den Verlauf der Risikofunktion A{t), so kann man den 
Verlauf der Uberlebensfunktion S(t) durch Integration rekonstruieren. 

Es ist die Aufgabe des neuronalen Netzes, den Verlauf der Risikofunktion 
A{t) nach Art einer Reihenentwicklung zu modellieren: 

Ait) = yio-exp[Eo B„(t)-AJ 

Dabei bezeichnen die Parameter A^ gemaS vorstehender Notation die 
Antwortsignale der Neuronen Nq der Ausgangsschicht des neuronalen 
Netzes. Aq ist im Rahmen der vorliegenden Erfindung ein von t unabhangiger 
Parameter, der als Normierungsfaktor eingesetzt wird. Mit B^it) ist ein Satz 
von Funktionen bezeichnet, die als Basisfunktionen der Reihenentwicklung 
eine gute Annaherung an den tatsachlichen Verlauf der Risikofunktion 
ermoglichen. Als Funktionensatz Bo(t) konnen beispielsweise die fraktalen 
Polynome oder auch Funktionen wie t*' (p nicht notwendigerweise 
ganzzahlig) eingesetzt werden. Im Rahmen der vorliegenden Erfindung 
wurden B^iit) = 1; B^jCt) = const-t^'^, ... verwendet. 

5.4. Training des neuronalen Netzes - Vorbereitunqen 
5-4.1. Die Qptimierunqsfunktion 

Die Trainingsdatenmenge umfaBt die Datensatze einer Mehrzahl von 
Patienten, fur die nicht nur die Angaben iiber die Person und die Angaben 
uber das Krankheitsbild bekannt sind, sondern auch Angaben uber die Art 
der Nachbehandlung und der weitere Krankheitsverlauf . Aus den gesammel- 
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ten Daten uber den weiteren Krankheitsverlauf wird nach den folgenden 
Regain eine "tatsachliche Uberlebensfunktion" zusammengesetzt: 1st fur 
einen bestimmten Patienten zu einem Zeitpunkttdas vorbestimmte Ereignis, 
beispielsweise eine erneute Erkrankung oder der Tod des Patienten bereits 
5 eingetreten, so wird sein Beitrag 6 zur "tatsachlichen Uberlebensfunktion" 
vor dem Zeitpunkt t zu J = 0 und ab dem Zeitpunkt t zu <J = 1 gesetzt. 
Patienten, bei denen bis zum Zeitpunkt der Erhebung der Trainingsdaten- 

nnenge-das-vorbestimmte~Er-eignis-noch_nicht-eing^^ 

Daten), tragen zu jedem Zeitpunkt zur "tatsachlichen Oberlebensfunktion" 
10 nur 6 =^ 0 bei, Wahrend der Trainingsphase warden nun die Gewichte w^y 

• der Synapsen und die sonstigen vorstehend unter Punkt 5.2. genannten 
Optimierungsparameter derart eingestellt, daB die vom neuronalen Netz 
gelieferte Uberlebensfunktion moglichst gut der "tatsachlichen 
Uberlebensfunktion" entspricht. 

15 

Dies kann beispielsweise dadurch erzlelt werden, dal^ man eine fur diesen 
Zweck geeignete Optimierungsfunktion O definiert und ein lokales, im 
gunstigsten Fall sogar das globale Minimum dieser Optimierungsfunktion in 
dem von den Optimierungsparametern aufgespannten Raum sucht. Es ist im 
20 Stand der Technik bereits bekannt, zur Definition der Optimierungsfunktion 




O von einer sogenannten Likelihood-Funktion L auszugehen: 



O = -In L 

25 ErfindungsgemaR wird als Darstellung der Likelihood-Funktion 

L = Ilj Ifj(t)]* • lS-,{t)V'' 

gewahit, wobei f|{t) und S|(t) gemaS der unter Punkt 5.3. eingefiihrten 
30 Notation die Ereignisdichte und die Uberlebensfunktion fur den Patienten j 
der Trainungsmenge bezeichnen. Diese Likelihood-Funktion hat den Vorteil, 



fT 
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dafi der Rechenaufwand nur etwa proportional zur Anzahl der in der 
Trainingsdatenmenge erfafiten Patienten ansteigt. 



Eine weitere Moglichkeit zur Darstellung der Likelihood-Funktion ist: 

L = Ilj ( exp[E, Bo(t)-A,^] / E, exp[E, BJt)'AJ > 
-wobei-das-PFodukt— uber— alle— PatientenH-gebilde 

vorbestimnnte Ereignis zum Zeitpunkt t bereits aufgetreten ist, und wobei die 
erste Summe im Nenner des Quotienten uber alle Patienten I gebiidet wird, 
bei denen das vorbestimmte Ereignis zum Zeitpunkt t noch nicht aufgetreten 
ist. 




Der mit dieser Darstellung verbundene Rechenaufwand steigt allerdings 
15 etwa proportional zum Quadrat der Anzahl der in der Trainingsdatenmenge 
erfalSten Patienten an. 



5.4.2, Die Initialisierunq 

20 

• Zur Initialisierung der Netzoptimierungs-Parameter, beispielsweise der 
Gewichte der die Neuronen verbindenden Synapsen, konnen diesen Para- 
metern, wie dies im Stand der Technik an sich bekannt ist, stochastisch 
kleine Werte zugewiesen werden, die gewissen NormierungsregeIn gehor- 
25 Chen. Dabei ist es zusatzlich moglich, in die Normierung Erkenntnisse 
einflieSen zu lassen, die vorab in Testlaufen an neuronalen Netzen stark 
vereinfachter Struktur gewonnen wurden. 
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5.5, Training des neuronalen Netzes - Stmplex-Methode 



Die Suche nach einem lokoalen bzw. dem globalen Minimum der 
Optimierungsfunktion wird wie iiblich in mehreren Schritten bzw. Zyklen 
durchgefuhrt, ErfindungsgemaS wird jedoch zu dieser Suche erstmals die 
von Nelder und Mead (siehe Punkt 6. "Literaturverzeichnis") vorgeschlagene 
Simplex-Methode bei einem neuronalen Netz eingesetzt. Unter einem 
Sim plex wird in einem n-dimensionalen Raum ein ( n + 1 )-dimensionales 
Gebilde verstanden, das den aktuellen Stiitzpunkt in dem n-dimensionalen 
Raum umgibt, also in einem 2-dimensionalen Raum ein Dreieck, in einem 3- 
dimensionalen Raum eine Dreieckspyramide und so weiter. In welchen 
Richtungen und mit welchen Abstanden vom aktuellen Stutzpunkt die (n -h 1 ) 
Eckpunkte angeordnet werden, wird dabei auf Grundlage der Eigenschaften 
der Optimierungsfunktion an den Eckpunkten des vorhergehenden Zyklus 
bestimmt. 

Dieses Verfahren fuhrt zu einer streng monoton abfallenden Folge von 
Stutzpunkten. Es kann fortgesetzt werden, bis entweder (innerhalb 
vorgegebener Genauigkeitsgrenzen) ein lokales oder globales Minimum 
aufgefunden oder ein weiteres Abbruchkriterium erfCillt worden ist. Im 
Zusammenhang mit diesem weiteren Abbruchkriterium kommt nun die 
vorstehend bereits angesprochene Validierungs-Datenmenge ins Spiel: 

Der vorstehend angesprochene monotone Abfall der Stutzpunkte kann zum 
einen von tatsachlich objektivierbaren Eigenschaften der fur die Trainings- 
Datenmenge bestimmten Optimerungsfunktion herruhren. Zum anderen ist 
es jedoch auch moglich, daB der abfallende Verlauf im Bereich einer von 
stochastischen Fluktuationen hervorgerufenen Senke der Optimierungs- 
funktion erfolgt. Der letztgenannte Effekt tauscht aber einen Lernerfolg nur 
vor. Daher warden erfindungsgemaS auch die Eigenschaften der anhand der 
Validierungs-Datenmenge bestimmten Optimierungsfunktion an den gleichen 
Stutzpunkten untersucht. Stellt man dabei fest, daft auch die Stutzpunkte 
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der "Validierungsdaten-Optimierungsfunktion" monoton abfallen, so kann 
man davon ausgehen, daS man sich noch in einer "echten" Lemphase des 
neuronalen Netzes befindet. Stagniert die Folge der Stutzpunkte der 
"Validierungsdaten-Optimierungsfunktion" hingegen oder steigt sie sogar 
5 wieder an, so muR davon ausgegangen werden, daQ> man sich bezuglich der 
"Trainingsdaten-Optimierungsfunktion" in einer von stochastischen Fluk- 
tuationen hervorgerufenen Senke befindet, die einen Lernfortschritt nur 

vorgaukelt. Die zyklische Durchfuhrun g der Simplex-Metho de kann daher 

unterbrochen werden, 

^^^^ Der Vorteil der SImplex-Methode ist hauptsachlich darin zu sehen, dal^ sie 
^^^F allein anhand der Optimierungsfunktion durchgefuhrt werden kann und 
zudem die Schrlttweite und Schrittrichtung automatisch festgelegt werden. 

15 

5.6. Training des neuronalen Netzes - Strukturvereinfachung ("Pruning") 

Nachdem die Suche nach einem lokalen bzw. dem globalen Minimum abge- 
schlossen ist, wird gemaS einem nachsten Trainingsschritt untersucht, ob 
20 sich die Struktur des neuronalen Netzes aufgrund der bislang gewonnenen 

• Erkenntnisse nicht vereinfachen laRt. Bei diesem "Pruning" geht es also um 
die Untersuchung der Frage, welche der Synapsen so wenig Einfluli auf die 
Gesamtfunktion des neuronalen Netzes haben, daS auf sie verzichtet wer- 
den kann. Dies kann im einfachsten Fall beispielsweise dadurch erfolgen, 
25 daS das ihnen zugewiesene Gewicht ein fur allemal auf Null gesetzt wird. 
Grundsatzlich ist es jedoch ebenso denkbar, das Gewicht der betreffenden 
Synapse auf einen festen Wert "einzufrieren". Vorteilhafterweise sollten 
sich Simplexoptimierungs-Schritte und Strukturvereinfachungs-Schritte in 
einem iterativen Verfahren abwechseln. Selbstverstandlich ware es 
30 wunschenswert, das neuronale Netz bereits nach dem AusschluR einer 
einzigen Synapse einer erneuten Simplexoptimierung zu unterziehen. Dies 
ist jedoch im HInblick auf die fur das Training insgesamt erforderliche Zerit 
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nicht vertretbar. In der Praxis hat es sich als gunstiger KompromiS erwiesen, 
wahrend eines Strukturvereinfachungs-Schritts allenf alls 1 0% der zu Beginn 
dieses Schritts noch vorhandenen Synapsen zu entfernen. 



5 Zur Strukturvereinfachung kommen erfindungsgemalS die beiden nach- 
folgend unterden Punkten 5.6.1. und 5.6.2. beschriebenen Verfahren zum 
Einsatz. 



^ 10 5.6.1, Likelihood-Methode 

^^^^ Im Rahmen dieser Methode wird als Referenzwert zunachst der Wert der 
Likelihood-Funktion auf Grundlage der gesamten Struktur des neuronalen 
Netzes in seinem gegenwartigen Trainingszustand berechnet, d.h. unter 

15 Verwendung der aktuellen Werte der Gewichte aller Synapsen. 
Anschlie&end wird der EinfluB einer vorgegebenen Synapse unterdruckt, 
d-h- der Wert des Gewichts dieser Synapse wird auf Null gesetzt. Sodann 
wird der Wert der Likelihood-Funktion fur die so vereinfachte Netzstruktur 
berechnet, und das Verhaltnis dieses Werts zum Referenzwert gebildet. 

20 . ^ 

• Hat man dieses Likelihood-Verhaltnis fur alle Synapsen berechnet, so 
beginnt man bei der Durchfuhrung der nachfolgend beschriebenen Schritte 
bei derjenigen Synapse, fur die der Wert des Likelihood-Verhaltnisses am 
nachsten bei Eins liegt: 

25 

Nimmt man an, daS die Netzstruktur bereits um (x-l) Synapsen vereinfacht 
worden ist und nunmehr die Bedeutung der x. Synapse untersucht wird, so 
vergleicht man die folgenden drei Netzstruktur-Varianten: Erstens Gesamt- 
struktur des neuronalen Netzes in seinem gegenwartigen Trainingszustand 
30 mit alien vor diesem Strukturvereinfachungs-Schritt noch vorhandenen 
Synapsen, zweitens Netzstruktur unter AusschluS der (x-1) in diesem 
Strukturvereinfachungs-Schritt bereits unterdruckten Synapsen, und drittens 
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Netzstruktur unter Ausschlufi nunmehr auch der x. Synapse. AnschlieSend 
vergleicht man die dritte Strukturvariante mittels eines Signif ikanz-Tests zum 
einen mit der ersten Strukturvariante (voile Struktur) und zum anderen mit 
der zweiten Strukturvariante ((x-1) Synapsen unterdrCickt). Wenn auch nur 
5 einer der beiden Tests eine zu starke Abweichung der dritten Struktur- 
variante ergibt, so wird die entsprechende Synapse zumindest fur den 
nachstfolgenden Simplexoptimierungs-Schritt beibehalten. 



Als Signifikanz-Test kann beispielsweise der an sich bekannte CHI- 
10 QUADRAT-Test tvgl. Punkt 6. "Literaturverzeichnis", Dokument ) 

• eingesetzt werden. Alternativ konnte dieser Signifikanz-Test auch mittels 
der ebenfalls an sich bekannten BOOT-STRAPPING-Methode {vgl. Punkt 6. 

"Literaturverzeichnis", Dokument ) durchgefuhrt werden. Die 

Verwendung des CHI-QUADRAT-Tests ist besonders dann giinstig, wenn 
15 man die Reaktion des neuronalen Netzes auf Grundlage einer Likelihood- 
Funktion ermittelt. Die BOOT-STRAPPING-Methode eignet sich auch bei 
anderen Arten von Funktionen zur Darstellung der Reaktion des neuronalen 
Netzes. 



20 

^^^^ 5.6,2. Korrelations-Methode 

Der AusschlulS bzw. die Unterdruckung von Synapsen nach der Korrela- 
tions-Methode beruht auf der Uberlegung, daS es moglich sein konnte, daR 

25 zwei in ein und derselben Schlcht angeordnete Neuronen auf ein Neuron 
einer darunter angeordneten Schicht qualitativ den gleichen EinfluB 
ausuben. In diesem Fall sollte sich die Reaktion des neuronalen Netzes, 
genauer gesagt das Antwortsignal dieses letztgenannten Neurons, im 
wesentlichen nicht andern, wenn man dieses Neuron lediglich von einem der 

30 beiden daruber angeordneten Neuronen stimulieren laBt und den EinfluR des 
zweiten Neurons durch eine Starkung der verbleibenden Synapse beruck- 
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sichtigt. Auf die von dem zweiten Neuron zu dem betrachteten Neuron 
fCihrende Synapse konnte dann verzichtet werden. 



a. Eingangs-Neuronen und Ausgangs-Neuronen verbindende Synapsen 

GemaS Punkt 5.2.4, hat der Beitrag des Antwortsignals zweier Eingangs- 
Neuronen zum Stimulationssignal eines AusgangsrrNeurons die Form: 



So = Wio-{Ai- Ci) + W2o-(A2 - C2) 

10 

^^^^ Unterstellt man nun, daS die beiden Antwortsignale A^ und A2 gemafi 
A2 = m-Ai H- n 

15 zumindest naherungsweise miteinander korreliert sind und daS das Gewicht 
groSer ist als das Gewicht W20 , so gilt fur das Stimulationssignal S^: 

So = (wio + W2o-nn)-Ai + (n-W2o - Wi^'Ci - W2o"C2) 



20 




mit 



w 10 = + W2o-nn 



25 und 

0*1 = -[(n-W2o - Wio-Ci - W2o-C2)]/(Wio + W2o-m) 



Ist w*,o nicht klein, so kann man das Verhalten des neuronalen Netzes unter 
den folgenden Annahmen testen: 
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1 . Ersetze das Gewicht w^^ durch w'^^; 

2. Ersetze den Parameter durch c'^; und 

3. Unterdrucke die Synapse vom Eingangs-Neuron N2 zum Ausgangs- 
Neuron N^. 

Verlauft dieser Test, der beispielsweise wieder als CHI-QUADRAT-Test 
durchgefuhrt warden kann, positiv, so kann auf die Synapse vom Eingangs- 
Neurc)n_N2 zum Ausgangs-Neuron verzichtet werden. 

b. Emgangs-Neuronen und Zwischen-Neuronen verbindende Synapsen 

In analoger Weise kann man auch den Beitrag des Antwortsignals zweier 
Eingangs-Neuronen zum Stimulationssignal eines Zwischen-Neurons 
betrachten, wobei es sich, wie nachstehend sofort klar werden wird, 
empfiehit, das Stimulationssignal des Zwischenneurons einschlielSlich 
dessen "Vorspannung" zu betrachten: 

Sh - b^ = w^h'A, + \/^2h^2 

Unterstellt man nun wiederum, daS die beiden Antwortsignale A^ und A2 
gemalS 

A2 = m-A, + n 

zumindest naherungsweise miteinander korreliert sind und dalS das Gewicht 
w^h groSer ist als das Gewicht W2h / so gilt fur das Stimulationssignal S^: 

Sh- bh = {Wih + W2h-m)-Ai + n-W2h 



Oder 
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mit 



w'lh = Wih + W2h'nn 



und 



b\ = + rTW2h 

1st w*ih nicht klein, so kann man das Verhalten des neuronalen Netzes unter 
den folgenden Annahmen testen: 

1 . Ersetze das Gewicht w^^ durch w*ih/ 

2. Ersetze die Vorspannung durch b\; und 

3. Unterdrucke die Synapse vom Eingangs-Neuron N2 zum Zwlschen- 
Neuron N^- 

Verlauft dieser Test, der beispielsweise wieder als CHl-QUADRAT-Test 
durchgefuhrt werden kann, positiv, so kann auf die Synapse vom 
Eingangsneuron N2 zum Zwischenneuron Nj, verzichtet werden. 

c. Zwischen-Neuronen und Ausgangs-Neuronen verbindende Synapsen 

In analoger Weise konnen auch von Zwischen-Neuronen zu Ausgangs- 
Neuronen fuhrende Synapsen behandelt werden. Hinsichtlich der 
Vorspannungen b^ ist jedoch moglicherweise die unter Punkt 5.2.4- 
angesprochene weitere Randbedingung zu beachten. 
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5,6.3. Uberprufuna der Topoloqie 

Das vorstehend beschriebene Ausdunnen der Struktur des neuronalen 
Netzes kann zur Folge haben, da& einzelne Neuronen mit keinem einzigen 
anderen Neuron mehr in Verbindung stehen. Dies ist beispielsweise der Fall, 
wenn ein Eingangs-Neuron mit keinem Zwischen-Neuron und auch keinem 
Ausgangs-Neuron in Verbindung steht, oder wenn ein Ausgangs-Neuron mit 
keinem.Zwiscben-Neuron und auch keinem Eingangs-Neuron in Verbindung 
steht. Es ist daher nur folgerichtig, wenn diese Neuronen, die keinen EinfluS 
auf die Funktion des neuronalen Netzes mehr haben, vollstandig deaktiviert 
warden. 

Einen Spezialfall bilden Zwischen-Neuronen, die zwar noch mit Neuronen 
der Eingangsschicht in Verbindung stehen, nicht jedoch mit Neuronen der 
Ausgangsschicht. Diese Zwischen-Neuronen konnen auf die Funktion des 
neuronalen Netzes keinerlei EinflufS mehr ausuben. Daher konnen auch die 
von der Eingangsschicht zu diesen Zwischen-Neuronen fuhrenden Synapsen 
unterdruckt werden, d.h. die Gewichte dieser Synapsen auf Null gesetzt 
werden. 

Es kann aber auch der umgekehrte Fall auftreten, namlich daS ein Zwischen- 
Neuron zwar noch mit der Ausgangsschicht verbunden ist, jedoch keinerlei 
Verbindung mehr mit der Eingangsschicht hat. Diese Zwischen-Neuronen 
konnen allenfalls ein von ihrer "Vorspannung" abhangendes Antwortsignal 
an die Ausgangs-Neuronen abgeben. Ein derartiges Signal hat aber keinerlei 
Informationsgehalt, der fur die Funktion des neuronalen Netzes von Bedeu- 
tung ware. Somit konnen auch die restlichen Synapsen dieser Zwischen- 
Neuronen unterdruckt werden. 
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5.7. Generalisierung 

Nach AbschluS der Trainingsphase ist es erforderlich, die Leistungsfahigkeit 
des trainlerten neuronalen Netzes zu uberprufen, um ein MaS dafur zu 
bekommen, welche Aussagekraft die von diesem neuronalen Netz geliefer- 
ten Uberlebensfunktionen tatsachlich haben. Hierzu wird die vorstehend 
bereits angesprochene Generalisierungs-Datenmenge eingesetzt, die auf das 
Training des neuronalen Netzes kelnerlei EinflulS genommen hat und somit 
eine objektive Aussage ermoglicht. 

5.8. AbschlieRend ft Bemerkunaen 

AbschlieBend sei erwahnt, daS neben den vorstehend explizit angespro- 
chenen tumor-spezifischen Faktoren up A und PAI-1 , die Aussagen uber die 
Invasion zulassen, auch weitere derartige Faktoren beriicksichtigt werden 
konnen. Es sind dies unter anderem Faktoren fur die Proliferation, bei- 
splelswelse die S-Phase und Ki-67, sowie fiir weitere das Tumorwachstum 
beeinflussende Prozesse. 
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Verfahren zum Trainieren eines neuronalen Netzes zur Ermittelung 
von Risikofunktionen fur Patienten im AnschluB an eine Ersterkran- 
kung mit einer vorbestimmten Krankheit auf Grundlage vorgegebener 
Trainings-Datensatze, welche objektivierbare und nneStechnisch 

erfaSte Paten zum Krankheitsbild der Patienten beinhalten , 

wobei das neuronale Netz umfaBt: 

eine . Eingangsschicht mit einer Mehrzahl von Eingangs- 

Neuronen, 

wenigstens eine Zwischenschicht mit einer Mehrzahl von 
Zwischen-Neuronen, 

eine Ausgangsschicht mit einer IVIehrzahl von Ausgangs- 
Neuronen, und 

eine Vielzahl von Synapsen, die jeweils zwei Neuronen 



unterschiedlicher Schichten miteinander verbinden, 
dadurch gekennzeichnet, 

dal^das Training des neuronalen Netzes eine Strukturvereinfachungs- 
Prozedur umfaf^t, d.h. das Auffinden und Eliminieren von Synapsen, 
welche auf den Verlauf der Risikofunktlon keinen wesentlichen 
Einflul^ ausuben> indem 

a1) man zwei mit ein und demselben Empfangs-Neuron 
verbundene Sende-Neuronen auswahit, 

man unterstellt, daS die von diesen Sende-Neuronen zum 
Empfangs-Neuron ausgehenden Signale qualitativ im 
wesentlichen das gleiche Verhalten zeigen, also miteinander 
korreliert sind, 

man die Synapse eines der beiden Sende-Neuronen zu dem 
Empfangs-Neuron unterbricht und dafiir das Gewicht der 
Synapse des jeweils anderen Sende-Neurons zu dem 
Empfangs-Neuron entsprechend anpaSt, 



a2) 



a3) 
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a4) man die Reaktion des gemaS Schritt a3) veranderten neuro- 
nalen Netzes mit der Reaktion des unveranderten neuronalen 
Netzes vergleicht, und 

a5) man dann, wenn die Abweichung der Reaktion ein vorbe- 
stimmtes MaS nicht uberschreitet, entscheidet, die in Schritt 
aS) vorgenommene Anderung beizubehalten. 

2. Verfahren nach Anspruch 1 , 

dadurch gekennzeichnet, daB die beiden Sende-Neuronen in ein und 
derselben Schicht angeordnet sind. 

3. Verfahren nach Anspruch 1 oder 2, 

dadurch gekennzeichnet, daS man in Schritt a3) ferner den Wert der 
Vorspannung des Empfangs-Neurons anpaSt. 

4. Verfahren zum Trainieren eines neuronalen Netzes gemaR dem 
Oberbegriff des Anspruchs 1 und gewunschtenfalls dem Kennzeichen 
eines der Anspruche 1 bis 3, 

dadurch gekennzeichnet, 

dais das Training des neuronalen Netzes eine Strukturvereinf achungs- 
Prozedur umfaSt, d.h. das Auffinden und Eliminieren von Synapsen, 
welche auf den Verlauf der Risikofunktion keinen wesentlichen 
EinfluB ausuben, indem 
b1) man eine Synapse auswahit, 

b2) man unterstelit, daft diese Synapse auf den Verlauf der 

Risikofunktion keinen wesentlichen EinfluB ausubt, 
b3) man diese Synapse unterbricht, 

b4) man die Reaktion des gemaS Schritt b3) veranderten neuro- 
nalen Netzes mit der Reaktion des unveranderten neuronalen 
Netzes vergleicht, und 
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b5) man dann, wenn die Abweichung der Reaktion ein vorbe- 
stimmtes MaS nicht uberschreitet, entscheidet, die in Schritt 
b3) vorgenommene Anderung beizubehalten. 



5 5. 
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Verfahren nach Anspruch 4, 

dadurch gekennzeichnet, dafS man dann, wenn im Rahman der 
Strukturvereinfachungs-Prozedur bereits n-1 Synapsen eliminiert 
ji<i/pjxlen,sind_und^roao_^^^^ 

uberpriift, die Reaktion des um n Synapsen verminderten neuronalen 
Netzes nicht nur mit der Reaktion eines um lediglich n-1 Synapsen 
verminderten Netzes vergleichf, sondern auch mit der Reaktion des 
neuronalen Netz mit seiner zu Beginn dieser Strukturvereinfachungs- 
Prozedur vorliegenden vollen Struktur, und daS man die Eiiminierung 
der n-ten Synapse nur dann beibehalt, wenn die Abweichung der 
Reaktion bei beiden Vergleichen ein vorbestimmtes MaS nicht 
uberschreitet. 




6. Verfahren nach einem der Anspriiche 1 bis 5, 

dadurch gekennzeichnet, daS man zur Darstellung der Reaktion des 
20 neuronalen Netzes den Wert einer Likelihood-Funktion fur das 

neuronale Netz ermittelt, 

7. Verfahren nach einem der Anspriiche 1 bis 6, 

dadurch gekennzeichnet, da& man den Vergleich von Struktur- 
25 varianten des neuronalen Netzes mittels eines Signifikanz-Tests 

durchfiihrt. 
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8. Verfahren nach Anspruch 7, 

dadurch gekennzeichnet, daS man den Vergleich von Struktur- 
varianten des neuronalen Netzes mittels des an sich bekannten CHI- 
QUADRAT-Tests durchfCihrt. 



• # 
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9. Verfahren nach Anspruch 7, 

dadurch gekennzelchnet, daS man den Vergleich von Struktur- 
varianten des neuronalen Netzes mittels der an sich bekannten 
BOOT-STRAPPING-Methode durchfuhrt. 

10. Verfahren nach einem der Anspruche 1 bis 8, 

dadurch gekennzelchnet, dalS man zum Vergleich zweler Struktur- 

varianten des neuronalen Netzes das Verhaltnis der Werte der 

LIkelihood-Funktlonen fiir diese belden Strukturvarianten ermittelt. 

11. Verfahren zum Trainleren eines neuronalen Netzes gemaS dem 
OberbegriffdesAnspruchs 1 und gewunschtenf alls dem Kennzeichen 
eines der Anspruche 1 bis 10, 

dadurch gekennzelchnet, 

daB das Training des neuronalen Netzes eine Optimierungs-Prozedur 
umfaBt, in weicher die Starken der einzelnen Synapsen, d^h._ die 
StarkenderVerbindungenzwischendenNeuronen,optimiertwerden, 

und daBzu dieser Optlmierung die an sich bekannte Simplex-Methode 
eingesetzt wird. 




- 35 - 



Zusammenfassuno 

Das erfindungsgemaSe Verfahren dient zum Trainieren eines neuronalen 
5 Netzes zur Ermittelung von Risikofunktionen fur Patienten im AnschluS an 
eine Ersterkrankung mit einer vorbestimmten Krankheit auf Grundlage 
vorgegebener Trainings-Datensatze, welche objektivierbare und 

melStechnisch erfaSte Paten zum Krankheitsbild der Patienten beinhalten. 

Das neuronals Netz umfaBt eine Mehrzahl von in mehreren Schichten 
10 angeordneten Neuronen sowie diese Neuronen verbindende Synapsen, Im 
^^^^ Verlaufe des Trainings wird die Struktur des neuronalen Netzes vereinfacht, 
^^^F indem Synapsen aufgespurt und eliminiert werden, welche auf den Verlauf 
der Risikofunktion keinen wesentlichen EinfluB ausuben. Dies kann 
beispielsweise dadurch erfolgen, daS man die Einflusse, die zwei Sende- 
15 Neuronen auf ein und dasselbe Empfangs-Neuron ausuben, auf eine mog- 
liche Korrelation untersucht und gegebenfalls eine der beiden zu dem 
Empfangs-Neuron fuhrenden Synapsen eliminiert. 



(Figur 1) 



